Truyền thuyết kể lại rằng: Ngôi đền này thờ một người con gái làm nghề thuốc cứu nhân độ thế. Cô gái vì không nghe lời cha lấy một kẻ nhà giàu nên bị cha đuổi ra khỏi nhà. Sau đó cô đem lòng yêu và lấy một chàng trai nghèo hiền lành, tốt bụng tên là Côi. Cuộc sống đang êm ả trôi đi trong hạnh phúc thì nàng bị bệnh hủi (bệnh phong). Hai vợ chồng đã đi khắp nơi chữa bệnh nhưng không khỏi. Bỗng một hôm có một bà lão xuất hiện đã chạy chữa cho nàng. Bà lên núi hái lá nam về hòa cùng với nước được lấy từ Vụng tiên. Cô gái khỏi bệnh. Bà cụ ra đi để lại cho cô gái một giỏ mây đựng đầy lá thuốc và một tay nải che mưa, nắng.

Một lần 2 vợ chồng đi chữa bệnh về khuya gặp trời mưa to, nhớ lời bà cụ dặn lấy tay nải ra che mưa và thiếp đi lúc nào không biết. Sáng mai khi tỉnh dậy 2 vợ chồng thấy mình đang nằm trong một ngôi nhà 3 gian khang trang sạch sẽ. Từ đó họ ở lại ngôi nhà và hằng ngày đi hái thuốc lá nam trên núi về chữa bệnh cho mọi người trong vùng. Một buổi sáng đẹp trời 2 vợ chồng ăn mặc rất đẹp dắt tay nhau đi lên đỉnh núi và thấy không quay trở về. Dân làng đồn rằng nàng chính là tiên nữ giáng trần. Ngôi nhà của vợ chồng được nhân dân trong vùng hương khói thờ phụng quanh năm.